AREX: Towards a Recursively Self-Improving Agent for Deep Research
AREX:递归自改进的深度研究智能体
🧭 Agent 递归自改进 · 长视野研究 ★ 深度解读
Beijing Academy of Artificial Intelligence (BAAI)
利用发现-验证不对称性,将部分验证的解递归地转化为更聚焦的研究问题,实现长视野深度研究。
📌 工作参考价值(4 点)
- 多约束查询分解与验证:电商搜索中用户需求常隐含多个约束(价格、品牌、特殊属性),可借鉴 AREX 将问题分解为约束束,通过递归验证式搜索逐条核验,避免一次性返回不满足所有条件的商品。
- 自主上下文更新工具:长对话推荐或 Agent 任务中,上下文膨胀会干扰决策。可训练模型自主调用“上下文更新”工具,将已验证的产品属性、未解决的约束及被排除的候选项压缩为紧凑状态,以替代全量历史,降低 token 成本并提升后续推理准确度。
- 关键步聚焦训练:强化学习优化推荐策略时,可标注“关键决策步”(如首次命中正确类目、修复错误搜索方向并转向),对它们施加额外的奖励塑形或集中训练,避免奖励信号被大量常规步庸稀释,显著提升长路径任务成功率。
- 双层循环架构:对于需要持续改进的生成式推荐(如营销文案生成、动态选品策略),可引入内循环产出草稿,外循环按置信度审核并针对性优化未满足的约束,实现可控的、以验证驱动的自我改进,而非无序重试。